Het kasteel Ter Balkt, oorspronkelijk een hoeve met watermolen, werd gebouwd door de Sint-Michielsabdij van Antwerpen rond 1200.
Eind 18de eeuw was het eigendom van de lijfarts van keizerin Maria-Theresia van Oostenrijk. Rond 1850 werd er een ruime villa aangebouwd, en zo ontstond het complex met binnenplein.
Begin 20ste eeuw kwam het gebouw in handen van de familie Wittman, deze liet het in 1921 tot een heus kasteel verbouwen. Nu telt het kasteel Ter Balkt vier vleugels rondom een binnenplaats waar de Molenbeek onderdoor stroomt. De watermolen maakt thans deel uit van het keukengedeelte van het kasteel. Kenmerken van de vroegere molenfunctie zijn de verhoogd gelegen Molenbeek en de waterval bij de locatie van het thans verdwenen bovenslagrad. Met gerecupereerd materiaal werden er ook oude jaartallen ingemetseld die geen betrekking hebben op dit gebouw! De jongste restauratie in neo-traditionele stijl dateert van 1968-'69 door de familie Mertens de Wilmars.